Extensión del empleo del criterio de expertos. Validez, consistencia y fiabilidad de los resultados científicos

El criterio (juicio o consulta) de expertos, en las últimas décadas, ha sido ampliamente utilizado en las investigaciones cualitativas, puede decirse que para muchos investigadores constituye la "regla de oro" para validar sus hallazgos. El propósito del artículo consistió en proponer un procedimiento para el procesamiento estadístico de los datos cuando se emplea una extensión del método convencional del criterio de expertos, para establecer la validez, consistencia y fiabilidad en los hallazgos científicos. El mismo fue aplicado en la toma de decisiones de una de las tres dimensiones de la variable de los componentes del ejercicio problémico interdisciplinario del proceso de enseñanza-aprendizaje. En el proceso investigativo se utilizaron métodos empíricos como la revisión de documentos, la encuesta y el criterio de expertos. Los tests estadísticos aplicados arrojaron significación estadística (P < 0.05 hasta P < 0.001) entre las comparaciones y/o asociaciones realizadas. Los hallazgos encontrados demostraron, al aplicar el procedimiento, una aproximación hacia la validez, consistencia y fiabilidad de los resultados científicos.

O julgamento de especialistas (julgamento ou consulta) tem sido, nas últimas décadas, amplamente utilizado em pesquisas qualitativas, indiscutivelmente o "padrão ouro" para muitos pesquisadores validarem suas descobertas. O objetivo do artigo foi propor um procedimento para o processamento estatístico de dados ao usar uma extensão do método convencional de julgamento de especialistas para estabelecer validade, consistência e confiabilidade em descobertas científicas. Ele foi aplicado na tomada de decisão de uma das três dimensões dos componentes variáveis do exercício interdisciplinar de solução de problemas do processo de ensino-aprendizagem. Métodos empíricos, como análise de documentos, pesquisa e julgamento de especialistas, foram usados no processo de pesquisa. Os testes estatísticos aplicados mostraram significância estatística (P < 0,05 a P < 0,001) entre as comparações e/ou associações feitas. Os resultados demonstraram, ao aplicar o procedimento, uma abordagem voltada para a validade, a consistência e a confiabilidade dos resultados científicos.

In recent decades, expert judgment has been widely used in qualitative research, and it can be said that for many researchers it constitutes the "golden rule" for validating their findings. The purpose of the article was to propose a procedure for the statistical processing of data when an extension of the conventional method of expert judgment is used to establish the validity, consistency and reliability of scientific findings. It was applied in the decision making of one of the three dimensions of the variable of the components of the interdisciplinary problem-solving exercise of the teaching-learning process. Empirical methods such as document review, survey and expert judgment were used in the research process. The statistical tests applied showed statistical significance (P < 0.05 to P < 0.001) among the comparisons and/or associations made. The findings found demonstrated, when applying the procedure, an approach towards the validity, consistency and reliability of the scientific results.

Instrumento de Avaliação Fonológica: evidências de validade de conteúdo e de processos de resposta / Phonological Assessment Instrument: evidence of content validity and response processes

RESUMO Objetivo evidenciar validade de conteúdo e validade de processos de resposta de um instrumento destinado à avaliação fonológica de crianças. Método validade realizada em duas etapas por dois diferentes grupos de juízes, grupo de especialistas e grupo de não-especialistas. O primeiro grupo composto por três juízes especialistas avaliaram os 123 itens lexicais após a elaboração do instrumento, julgando a aplicabilidade das figuras no contexto da avaliação infantil e sugerindo ajustes para compor o conteúdo. A partir das observações, o instrumento foi adequado e direcionado ao grupo de juízes não-especialistas que, por meio da aplicação do instrumento, tiveram suas respostas avaliadas conforme a facilidade ou dificuldade de elicitação dos itens do instrumento. Resultados As avaliações obtiveram resultados de teor positivo para as validades de conteúdo e de processos de resposta. Conclusão o estudo permitiu aprimorar os itens de teste de forma mais criteriosa, beneficiando o uso clínico e científico.

ABSTRACT Purpose to demonstrate the validity of content and the validity of response processes of an instrument intended for the phonological assessment of children. Methods validation was carried out in two stages by two different groups of judges, a group of specialists and a group of non-specialists. The first group, composed of three expert judges, evaluated the 123 lexical items after creating the instrument, judging the applicability of the figures in the context of child assessment, and suggesting adjustments to compose the content. From the observations, the instrument was adapted and directed to the group of non-specialist judges who, through the application of the instrument, had their responses evaluated according to the ease or difficulty of eliciting the instrument's items. Results The predictions obtained positive results for content validity and response processes. Conclusion the study allowed to improve the test items more judiciously, benefiting clinical and scientific use.

Evidências de validade e fidedignidade do Teste de Fala Comprimida com Figuras / Evidence of validity and reliability of the Compressed Speech Test with Figures

RESUMO Objetivo Buscar evidências de validade e fidedignidade para o Teste de Fala Comprimida com Figuras. Método O estudo foi subdividido em três etapas: validação de construto, critério e fidedignidade. Todos os participantes tinham idade entre 6:00 e 8:11. Para o construto, aplicou-se o Fala Comprimida com Figuras e o teste padrão ouro Fala Comprimida Adaptado em crianças com desenvolvimento fonológico típico. Para análise de critério, aplicou-se o Fala Comprimida com Figuras em dois grupos, com desenvolvimento fonológico típico (G1) e atípico (G2). Por fim, os protocolos de aplicação passaram pela análise de duas Fonoaudiólogas, com experiência na área do Processamento Auditivo Central, buscando obter uma análise de fidedignidade interavaliadores. Resultados O teste de correlação indicou um construto quase perfeito (Rho=0,843 para orelha direita e Rho=0,823 para orelha esquerda). Na análise de critério, percebeu-se que ambos os grupos apresentaram resultados satisfatórios (G1 = 99,6 a 100%; G2 = 96 a 96,5%). Já a análise de fidedignidade demonstrou que o protocolo é de fácil análise, pois ambos os profissionais apresentaram respostas unânimes. Conclusão Foi possível obter evidências de validade e fidedignidade para o instrumento de Fala Comprimida com Figuras. A análise de construto evidenciou que o instrumento mede a mesma variável que o teste padrão outro, com correlação quase perfeita. Na análise de critério, ambos os grupos apresentaram desempenho semelhante, demonstrando que o instrumento não parece diferenciar populações com e sem transtorno fonológico leve. A análise de fidedignidade interavaliador demonstrou que o protocolo é de fácil análise e pontuação.

ABSTRACT Purpose To seek evidence of validity and reliability for the Compressed Speech Test with Figures. Methods The study was subdivided into three stages: construct validation, criteria and reliability. All participants were aged between 6:00 and 8:11. For the construct, Compressed Speech with Figures and the gold standard Adapted Compressed Speech test were applied to children with typical phonological development. For criterion analysis, Compressed Speech with Figures was applied in two groups, with typical (G1) and atypical (G2) phonological development. Finally, the application protocols underwent analysis by two Speech Therapists, with experience in the area of Central Auditory Processing, seeking to obtain an inter-evaluator reliability analysis. Results The correlation test indicated an almost perfect construct (correlation 0.843 for the right ear and 0.823 for the left ear). In the criterion analysis, it was noticed that both groups presented satisfactory results (G1 = 99.6 to 100%; G2 = 96 to 96.5%). The reliability analysis demonstrated that the protocol is easy to analyze, as both professionals presented unanimous responses. Conclusion It was possible to obtain evidence of validity and reliability for the Compressed Speech with Figures instrument. The construct analysis showed that the instrument measures the same variable as the gold standard test, with an almost perfect correlation. In the criterion analysis, both groups presented similar performance, demonstrating that the instrument does not seem to differentiate populations with and without mild phonological disorder. The inter-evaluator reliability analysis demonstrated that the protocol is easy to analyze and score.

Escala de Triagem para Identificação de Sinais de Autismo ­ Versão Professores (TEA-PROF): Processo de Construção / Screening Scale for the Identification of Autism Signs ­ Teacher Version (TEA-PROF): Construction Process

O Transtorno do Espectro Autista (TEA) é caracterizado por prejuízos persistentes na comunicação e interação social e por um padrão de comportamentos repetitivos e restritos de interesses. Uma forma válida de rastrear o TEA em crianças em idade escolar é por meio de instrumentos que avaliem o relato de professores sobre os comportamentos de seus alunos. Desse modo, este estudo objetivou apresentar os processos de construção e de validade de conteúdo da Escala de Triagem para Identificação de Sinais de Autismo ­ versão professores (TEA-PROF). Foram realizadas duas fases: (a) revisão da literatura e identificação de produções científicas e instrumentos, nacional e internacionalmente, sobre identificação de sinais de autismo que contemplassem os professores como respondentes; (b) elaboração dos itens, análise dos juízes especialistas e análise semântica. Como resultado, a escala foi construída, sendo destinada a professores de crianças na faixa etária de 6 a 12 anos, composta por 65 itens com evidências de validade de conteúdo adequadas e baseados nos critérios diagnósticos A e B para Transtorno do Espectro Autista do Manual Diagnóstico e Estatístico dos Transtornos Mentais, quinta edição. Estudos futuros são necessários a fim de verificar outros tipos de evidências de validade, bem como suas possíveis notas de corte.

Autism Spectrum Disorder (ASD) is characterized by persistent impairment in social communications and interactions as well as restricted or repetitive patterns of behavior and interests. An effectual way of tracing ASD in school-aged children is through instruments that evaluate the account of educators about their students behavior. Therefore, the purpose of this study was to introduce the process of construction and content validity of the Screening Scale for the Identification of Autism Signs ­ Teacher Version (TEA-PROF). The procedures were performed in two phases: (a) literature review and identification of scientific productions and instruments, and national and international instruments pertaining to the identification of autism signs in which the teachers were the respondents; (b) item elaboration, specialized judge analyses and semantic analysis. As a result, the scale was constructed destined for teachers of children between the ages of 6 and 12 years of age, composed of 65 items based on evidence of contents validity appropriate and based on the criteria diagnostic A and B for the Autism Spectrum from the Diagnostic and Statistical Manual of mental disorders. Future studies are needed to verify other types of evidence of validity, as well as their possible cutoff scores.

Desenvolvimento e Evidências de Validade do Inventário de Avaliação dos Cinco Grandes Fatores e Facetas de Personalidade (IACGF-F) / Development and Validity Evidence of the Big Five Factors and Facets Personality Assessment Inventory (PAIBFF-F)

A personalidade é um construto central na pesquisa psicológica, podendo ser definida como uma estrutura relativamente estável do ser humano que influencia seus comportamentos diante de acontecimentos diários. Este estudo objetivou desenvolver e obter evidências de validade baseadas na estrutura interna do Inventário de Avaliação dos Cinco Grandes Fatores e Facetas de Personalidade (IACGF-F). A Teoria dos Cinco Grandes Fatores de Personalidade foi utilizada como referencial teórico para elaboração dos itens. Para o estudo piloto, 150 sujeitos responderam à versão do instrumento composta por 151 itens e questionário sociodemográfico. O estudo final contou com 285 sujeitos com média de idade de 22,6 anos que responderam à versão do IACGF-F com 129 itens, além do questionário sociodemográfico. Foi realizado um conjunto de sete análises fatoriais exploratórias, estimação da fidedignidade, bem como calibração dos parâmetros dos itens a partir da TRI. A versão final do instrumento ficou composta por 103 itens distribuídos em cinco fatores com variação de cinco a seis facetas por fator. Foram encontrados bons índices de fidedignidade (alfas entre 0,85 e 0,96), além de bons índices de dificuldade e discriminação. Sugere-se a utilização do IACGF-F em pesquisas nas quais a avaliação mais detalhada das facetas se faz necessária.

Personality is a central construct in psychological research and can be defined as a relatively stable structure of human beings that influences their behavior in the face of daily events. The purpose of this study wasd to develop and obtain validity evidence based on the internal structure of the Inventory for Assessment of the Big Five Personality Factors and Facets (PAIBFF-F). The Big Five Personality Factor Theory was used as the theoretical framework for item development. For the pilot study, 150 subjects answered the initial version of the instrument, which consisted of 151 items and a sociodemographic questionnaire. The final study included 285 subjects with a mean age of 22.6 years who answered a version of the PAIBFF-F with 129 items and sociodemographic questionnaire. Seven exploratory factor analyses, reliability estimation, as well as calibration of the item parameters from TRI were performed. The final version of the instrument was composed of 103 items distributed in five factors with a variation of five to six facets per factor. Good reliability indices were found (alphas between 0.85 and 0.96), in addition to good difficulty and discrimination indices. We suggest the use of the IACGF-P in research in which a more detailed evaluation of the facets is required.

Recovery Experience Questionnaire: validity evidence of the Brazilian-Portuguese version / Questionário de Experiência de Restauro: evidências de validade da versão em português brasileiro

Abstract The aim is to present validity evidence of the Brazilian-Portuguese Recovery Experience Questionnaire (REQ-PB) by applying a procedure to decentering cross-cultural scales translation and adaptation. First, we had a phase with bilingual experts, which assessed different criteria of translation quality. In sequence, we conducted the replication of the original research to achieve validity indicators in the Brazilian context. We carried out both Confirmatory Factor Analysis (to find structural validity indicators) and correlations with various external variables (to find convergent validity indicators). Step 1 showed promising results of decentering translation. In step 2 participated 164 workers and the CFA confirmed the four-factor model: psychological detachment from work, relaxation, mastery experience, and control over leisure time. The convergent validity showed a significant correlation with external variables. The REQ-PB showed adequate psychometric properties and may explain and compare empirical evidence of the recovery topic. We concluded that we have a good quality scale to be used in future research and integrated with other constructs to support interventions.

Resumo O objetivo é apresentar evidências da validade do Questionário de Experiência de Restauro em português brasileiro (REQ-PB) por meio da aplicação de um procedimento de descentralização para tradução e adaptação de escalas transculturais. Inicialmente, tivemos uma fase com especialistas bilíngues que avaliaram a qualidade da tradução utilizando diferentes critérios. Na sequência, realizamos a replicação da pesquisa original para alcançar os indicadores de validade no contexto brasileiro. Efetuamos tanto a análise fatorial confirmatória (para encontrar indicadores de validade estrutural) quanto correlações com variáveis externas (para encontrar indicadores de validade convergentes). O passo 1 mostrou resultados promissores na tradução descentralizada. No passo 2, participaram 164 trabalhadores e a análise fatorial confirmatória confirmou o modelo de quatro fatores: distanciamento psicológico do trabalho, relaxamento, experiência de domínio e controle do tempo livre. A validade convergente mostrou uma correlação significativa com variáveis externas. O REQ-PB mostrou propriedades psicométricas adequadas capazes de explicar e comparar evidências empíricas do tópico de restauro. Em resumo, a escala pode ser utilizada em pesquisas futuras e integrada aoutros construtos para orientar intervenções.

Escala de estratégias de resolução de conflitos familiares: adaptação e evidências psicométricas / Family conflict resolution strategies scale: adaptation and psychometric evidence / Escala de estrategias de resolución de conflictos familiares: adaptación y evidencias psicométricas

Este estudo teve o objetivo de adaptar o Conflict Resolution Styles Inventory (CRSI) para o contexto brasileiro e investigar se este apresenta evidências de adequabilidade psicométrica. No Estudo 1 foi desenvolvida a versão brasileira e, posteriormente, foram analisadas evidências de validade de conteúdo por meio da análise de juízes (N = 4 avaliadores especialistas) e adequação semântica em um estudo piloto com adolescentes (N = 15). No Estudo 2, verificamos as propriedades psicométricas do CRSI em uma amostra de adolescentes (N = 276), reunindo evidências de validade de estrutura interna e precisão. Finalmente, no Estudo 3, foram investigadas evidências adicionais de estrutura interna e precisão do CRSI em uma nova amostra (N = 224). Os resultados demonstraram que o CRSI reúne evidências de validade com base no conteúdo, na estrutura interna e de precisão, podendo ser usado para avaliar as estratégias de resolução de conflitos que adolescentes brasileiros utilizam nas discordâncias com seus pais, possibilitando seu uso em pesquisas sobre esse tema.(AU)

This study adapted the Conflict Resolution Styles Inventory (CRSI) for the Brazilian context and assessed its psychometric adequacy. In Study 1, the Brazilian version was developed and content validity was analyzed by experts (N = 4) with semantic adequacy assessed in a pilot study with adolescents (N = 15). In Study 2, psychometric properties were examined in a sample of adolescents (N = 276), providing evidence of internal validity and reliability. Study 3 further investigated evidence of internal validity and reliability in a new sample (N = 224). Results indicated that the CRSI exhibits content validity, internal validity, and reliability, making it suitable for assessing conflict resolution strategies employed by Brazilian adolescents in disagreements with their parents, enabling its use in related research.(AU)

Este estudio tuvo como objetivo adaptar el Conflict Resolution Styles Inventory (CRSI) al contexto brasileño y verificar si presenta evidencias de adecuación psicométrica. En el Estudio 1, se desarrolló la versión brasileña y, posteriormente, se analizaron las evidencias de validez de contenido a través del análisis de jueces (N = 4 evaluadores expertos) y de adecuación semántica en un estudio piloto con adolescentes (N = 15). En el Estudio 2, verificamos las propiedades psicométricas del CRSI en una muestra de adolescentes (N = 276), recogiendo evidencias de validez interna y precisión. Finalmente, en el Estudio 3, se investigó evidencias adicionales de la validez interna y precisión del CRSI en una nueva muestra (N = 224). Los resultados mostraron que el CRSI reúne evidencias de validez de contenido, validez interna y precisión, y puede ser utilizado para evaluar las estrategias de resolución de conflictos utilizadas por adolescentes brasileños en desacuerdos con sus padres, lo que permite su uso en investigaciones sobre este tema.(AU)

Evidencias de validez de una escala para evaluar el ajuste a la vida universitaria / Evidence of Validity of a Scale to Assess College Adjustment / Evidências de validade de uma escala para avaliar a adaptação à vida universitária

El propósito de la investigación fue desarrollar una escala para medir el proceso de ajuste a la vida universitaria. Este constructo multifactorial se basa en un modelo teórico de tres dimensiones: académica, social e institucional. La muestra principal estuvo conformada por 673 estudiantes: 42.1 % mujeres, 57.7 % hombres y 0.3 % otro, con un promedio de 18.29 años. En el primer análisis se encontraron evidencias asociadas al contenido de las dimensiones de la escala denominada AjusteU. En el análisis de validez convergente se halló una correlación de 0.582 a un nivel de significancia del 0.01 (bilateral) con el instrumento CAVU, otra medida del ajuste a la vida universitaria. En el tercer análisis se validó el planteamiento teórico con los datos empíricos mediante un modelo de ecuaciones estructurales. Finalmente, en el análisis predictivo se comprobó que la puntuación de la escala AjusteU se asoció significativamente con el rendimiento del primer período universitario. Se concluye que estas evidencias empíricas permiten un uso adecuado de los resultados, especialmente en la toma de decisiones oportunas para favorecer el proceso de transición de secundaria a la educación superior. La principal limitación fue la aplicación de la escala en modalidad remota en el contexto de pandemia, por lo que las experiencias del estudiantado podrían ser diferentes en un entorno presencial

The purpose of the research was to develop a scale to measure college adjustment. The theorical model was based on three dimensions: academical, social and institutional. The principal sample was conformed for 673 students: 42.1 % women, 57.7 % men and 0.3 % other, with an average of 18.29 years old. In the first analysis were found evidence associated to the content of the dimensions of the scale denominated AjusteU. In the validity convergent analysis was found a correlation of 0.582 to a significance level of 0.01 (bilateral) with the instrument CAVU, other measure that is related to the adjustment process. In the third analysis, the theoretical approach was validated with empirical data using a structural equation model. Finally, in the predictive analysis was proved that the scoring of the scale AjusteU was associated significantly with the performance of the first period of college. The conclusion is that this empirical evidence allows an appropriate use of their results, specifically in the opportune decision making to favor the transition process from high school to higher education. The main limitation was the application of the scale in the remote modality in the pandemic context, therefore the experiences of the students might be different in an on-site experience.

O objetivo da pesquisa foi desenvolver uma escala para medir o processo de adaptação à vida universitária. Este construto multifatorial é baseado em um modelo teórico de três dimensões: acadêmica, social e institucional. A amostra principal foi composta por 673 estudantes, sendo: 42.1 % mulheres, 57.7 % homens e 0.3 % outros, com idade média de 18.29 anos. Na primeira análise, foram encontradas evidências associadas ao conteúdo das dimensões da escala denominada AjusteU. Na análise de validade convergente, uma correlação de 0.582 foi encontrada em um nível de significância de 0.01 (bilateral) com o instrumento CAVU, outra medida de adaptação à vida universitária. Na terceira análise, a abordagem teórica foi validada com dados empíricos usando um modelo de equações estruturais. Por fim, na análise preditiva verificouse que a pontuação da escala AjusteU esteve significativamente associada ao desempenho do primeiro período universitário. Concluise que estas evidências empíricas permitem uma utilização adequada dos resultados, sobretudo na tomada de decisões oportunas que favoreçam o processo de transição do ensino médio para o superior. A principal limitação do estudo foi a aplicação da escala de forma remota no contexto de pandemia, de modo que as experiências do corpo discente poderiam ser diferentes em um ambiente presencial.

Perfis de jogo de crianças: adaptação do Children's Play Therapy Instrument (CPTI) / Play profiles of children: adaptation of the Children's Play Therapy Instrument (CPTI) / Perfiles de juego de niños: adaptación del Children's Play Therapy Instrument (CPTI)

O brincar e a vida infantil estão inevitavelmente entrelaçados, havendo inúmeras evidências da ação terapêutica do brinquedo para o desenvolvimento infantil e, consequentemente, para o desenrolar da Psicoterapia Psicodinâmica (PP). Para acessar o brincar de crianças de maneira objetiva durante o percurso da PP, foi desenvolvido o Children's Play Therapy Instrument (CPTI). O objetivo desse estudo foi adaptar para o português o CPTI, assim como realizar um estudo piloto para identificar evidências de validade do instrumento, através da análise de perfis de jogo de psicoterapias de três crianças, uma menina e dois meninos, com oito, sete e oito anos, diagnosticados com transtorno de adaptação, transtorno disruptivo da desregulação do humor e transtorno do espectro autista, nível 1, respectivamente. A versão em português do CPTI apresentou boa equivalência com a original e a fidedignidade interavaliadores foi alta, além de serem encontradas evidências preliminares de validade. O instrumento foi capaz de diferenciar os perfis de jogo de cada criança, descrevendo atividades de jogo condizentes com as psicopatologias analisadas. As possibilidades e limitações de utilização do instrumento foram discutidas. (AU)

Play and childhood are inevitably intertwined, with numerous indications of the therapeutic effects of play on child development and, consequently, on the progress of Psychodynamic Psychotherapy (PP). To access children's play during the course of PP, the Children's Play Therapy Instrument (CPTI) was developed. The aim of this study was to adapt the CPTI to Portuguese and to conduct a pilot study to identify validity evidence for the instrument through the analysis of play profiles of psychotherapies involving three children: one girl and two boys, aged eight, seven, and eight, respectively. They were diagnosed with adjustment disorder, disruptive mood dysregulation disorder, and autism spectrum disorder level 1. The Portuguese version of the CPTI showed good equivalence to the original, inter-rater reliability was high, and preliminary evidence of validity was found. The instrument was able to differentiate each child's play profiles, describing play activities consistent with the psychopathologies analyzed. The instrument's possibilities and limitations were discussed. (AU)

El juego y la vida de los niños están inevitablemente entrelazados, con numerosas evidencias de la acción terapéutica del juguete para el desarrollo infantil y, en consecuencia, para el desarrollo de la Psicoterapia Psicodinámica (PP). Para acceder de forma objetiva al juego infantil durante el transcurso de la PP, se desarrolló el Instrumento de Terapia de Juego Infantil (CPTI). El objetivo de este estudio fue adaptar el CPTI al portugués, así como realizar un estudio piloto para identificar evidencias de validez del instrumento, a través del análisis de perfiles de juego de tres psicoterapias con tres niños, se incluye una niña y dos niños de ocho, siete y ocho años, diagnosticados con trastorno de adaptación, trastorno de desregulación disruptiva del estado de ánimo y trastorno del espectro autista, nivel 1, respectivamente. El CPTI mostró una buena equivalencia con el original y la confiabilidad entre evaluadores fue alta. El instrumento logró diferenciar los perfiles de juego de cada niño, describiendo actividades de juego consistentes con las psicopatologías analizadas. Se discutieron las posibilidades y limitaciones del uso del instrumento. (AU)

¿Cuántos años tienes?, ¿estás casado?, ¿tienes hijos? preguntas irrelevantes y discriminación encubierta en la selección de personal / How old are you? are you married? do you have children? irrelevant questions and covert discrimination in personnel selection / Quantos anos você tem? você é casado? você tem filhos? perguntas irrelevantes e discriminação oculta na seleção de pessoal

La selección de personal ha demostrado ser un procedimiento de incalculable valor para las organizaciones. Sin embargo, en la práctica los empleadores suelen (y prefieren) utilizar los métodos de selección de escaza y cuestionable evidencia. En el contexto boliviano, el uso de preguntas personales relacionadas a la edad, estado civil, sexo, raza, embarazo, entre otros, parece estar bastante extendido. Aunque, la utilidad que justifique su inclusión sigue sin demostrarse. En el presente artículo, analizo la relevancia y el soporte de las preguntas personales en función de su contribución para tres propósitos de la selección de personal: validez para predecir el desempeño laboral, reclutamiento y discriminación. Finalmente, proporciono algunas sugerencias: (1) para mejorar la eficiencia de los procesos de selección, y (2) para enmendar y fortalecer las leyes contra la discriminación en la selección de la legislación laboral boliviana.

The selection of personnel has proven to be an invaluable procedure for organizations. However, in practice employers often (and prefer) to use the selection methods of scarce and questionable evidence. In the Bolivian context, the use of personal questions related to age, marital status, sex, race, pregnancy, among others, seems to be quite widespread. Although the usefulness that justifies its inclusion remains unproven. In this article, I analyze the relevance and support of personal questions based on their contribution to three purposes of personnel selection: validity to predict job performance, recruitment, and discrimination. Finally, I provide some suggestions: (1) to improve the efficiency of the selection processes, and (2) to amend and strengthen the laws against discrimination in the selection of Bolivian labor law.

A seleção de pessoal provou ser um procedimento inestimável para as organizações. No entanto, na prática, os empregadores costumam (e preferem) usar métodos de seleção de evidências escassas e questionáveis. No contexto boliviano, o uso de perguntas pessoais relacionadas à idade, estado civil, sexo, raça, gravidez, entre outros, parece ser bastante difundido. Embora a utilidade que justifique a sua inclusão permaneça não comprovada. Neste artigo, analiso a relevância e o suporte de perguntas pessoais com base em sua contribuição para três propósitos de seleção de pessoal: validade para prever o desempenho no trabalho, recrutamento e discriminação. Finalmente, apresento algumas sugestões: (1) melhorar a eficiência dos processos de seleção e (2) alterar e fortalecer as leis contra a discriminação na seleção da legislação trabalhista boliviana.

La prueba de figuras enmascaradas en la versión SaWa sobre figuras Gottschaldt ­presentación e indicadores psicométricos / The Embedded Figures Test in the SaWa Version on Gottschaldt Figures ­Presentation and Psychometric Indicators­ / O teste de figuras mascaradas na versão SaWa em figuras de Gottschaldt ­Apresentação e indicadores psicométricos­

El artículo presenta la versión de la prueba EfT desarrollada por Sawa sobre las figuras Gottschaldt, como indicador de la capacidad de reestructuración perceptual y del estilo cognitivo en la dimensión de independencia- dependencia de campo. Se examina la consistencia interna del instrumento, su validez estructural y de constructo a partir de los datos recogidos en cuatro diferentes estudios en los que ha sido aplicado (n = 6.530). Los resultados indican altos niveles de consistencia interna y adecuados niveles de validez estructural del instrumento. La validez de constructo se determina mediante el examen de los comportamientos de la prueba frente al sexo y el grado/edad. Los resultados demuestran que el instrumento se comporta de acuerdo con lo esperado en el constructo. Por último, se presentan los baremos del instrumento

This paper presents the version of the Embedded Figures Test (EfT) that Sawa developed using Gottschaldt's figures. The test indicates the perceptual restructur- ing ability and the field dependence-independence dimension of cognitive style. The instrument's internal consistency and its structural and construct validity are examined using data collected in four previous studies in which the test was administered (n = 6.530). Results show high levels of internal consistency and adequate levels of structural validity. The construct validity was determined by examining the instrument's behavior regarding sex and grade/age. Results indicate that the test behaves as expected considering the construct. Finally, the instrument's norms are presented

O artigo apresenta a versão do teste EfT, desenvol- vida por Sawa sobre as figuras de Gottchaldt, como indicador da capacidade de reestruturação perceptiva e, do estilo cognitivo na dimensão independência- -dependência do campo. A consistência interna do instrumento, sua validade estrutural e sua validade de construto são examinadas a partir dos dados co- letados em quatro diferentes estudos em que o teste foi aplicado (n = 6.530). Os resultados indicam altos níveis de consistência interna e níveis adequados de validade estrutural do instrumento. A validade de cons- truto é determinada examinando os comportamentos de teste em relação ao gênero e nível de escolaridade/ idade. Os resultados indicam que o instrumento se comporta conforme o esperado no construto. Por fim, são apresentadas as escalas do instrumento.

Relative validity and reproducibility of WHO indicators for assessment of feeding practices in children under two years of age / Validade relativa e reprodutibilidade de indicadores da OMS para avaliação da alimentação de crianças menores de dois anos

Abstract The study aimed to evaluate relative validity and reproducibility of seven WHO indicators of dietary practices in children aged 6-23.9 months. Data from probabilistic sample of children who used primary healthcare services in Rio de Janeiro, Brazil were collected using a 24h dietary recall (24HR) and a closed questionnaire (Q1) on feeding in the day before the study. The last one was reapplied (Q2) around 16 days later. Validity was assessed by comparing the prevalence rates estimated by 24HR and Q1 and calculating the positive (PPV) and negative (NPV) predictive values, sensitivity (Se), specificity (Sp), and accuracy index (AI) for the resulting indicators. For reproducibility, estimated prevalence rates based on Q1 and Q2 were compared and the kappa index and prevalence-adjusted bias-adjusted kappa were estimated. Of the seven estimated indicators, the prevalence of two was overestimated (Continued breastfeeding: 50.0% vs 40.0%; Sweet beverage consumption: 65.1% vs 52.7%) and the prevalence of one was underestimated (Zero vegetable or fruit consumption: 6.5% vs 18.1%). For most indicators, Se and PPV were higher than Sp and NPV. The prevalence rates determined with Q1 and Q2 were similar for 6 indicators. More than half showed good, very good or excellent agreement.

Resumo O estudo avaliou a validade relativa e a reprodutibilidade de sete indicadores da OMS sobre alimentação de crianças de 6-23,9 meses. Dados de amostra probabilística de usuários de serviços básicos de saúde na cidade do Rio de Janeiro, Brasil, foram coletados por meio de recordatório alimentar de 24 horas (R24h) e questionário fechado (Q1) sobre alimentação no dia anterior ao estudo. Este último foi reaplicado (Q2) em torno de 16 dias depois. A validade foi avaliada comparando-se as prevalências estimadas pelo R24h e Q1 e calculando-se os valores preditivos positivo (VPP) e negativo (VPN), sensibilidade (Se), especificidade (Esp) e índice de acurácia (IA) dos indicadores resultantes. Para reprodutibilidade, as prevalências estimadas com base em Q1 e Q2 foram comparadas e estimados o índice kappa e o kappa ajustado pela prevalência. Dos sete indicadores estimados, houve superestimação da prevalência de dois (aleitamento continuado: 50,0% versus 40,0%; consumo de bebidas adoçadas: 65,1% vs. 52,7%) e subestimação da prevalência de um (não consumo de frutas e hortaliças: 6,5% vs. 18,1%). Para a maioria deles, Se e VPP foram maiores do que Esp e VPN. As prevalências determinadas com Q1 e Q2 foram semelhantes para seis indicadores. Mais da metade dos indicadores apresentaram concordância boa, muito boa ou excelente.

Preliminary validity for the Big Five Inventory-2 in brazilian adults / Evidências preliminares de validade do Big Five Inventory-2 em adultos brasileiros / Evidencias preliminares de validez del Big Five Inventory-2 en adultos brasileños

The Big Five Inventory-2 (BFI-2) assesses personality through the big five factor model model (FFM). This study aimed to verify whether the internal structure of the BFI-2 is corroborated in a Brazilian sample. Participants were 908 cisgender adults, aged between 17 and 93 years, 532 of whom were women. Confirmatory factor analysis and Exploratory structural equation modeling were performed with the BFI-2. The 15 facets of personality resulted in adequate fit and reliability, mainly for the respondents under 60 years of age. We conclude that the BFI-2 presents evidence of preliminary validity based on its internal structure, although further validity studies are required with the instrument, to testify its psychometric quality. (AU)

O Big Five Inventory-2 (BFI-2) avalia a personalidade no modelo dos Cinco Grandes Fatores (CGF). O presente estudo objetivou verificar se a estrutura interna do BFI-2 é corroborada em uma amostra brasileira. Participaram 908 adultos cisgênero, com idades entre 17 e 93 anos, sendo 532 mulheres. Análise fatorial confirmatória e modelagem de equações estruturais exploratórias foram conduzidas no BFI-2. As 15 facetas de personalidade do BFI-2 resultaram em índices de ajuste adequados, principalmente para os respondentes com idade até 60 anos. Conclui-se que o BFI-2 apresenta evidência inicial de validade baseada em sua estrutura interna, apesar de que novos estudos de validade devem ser conduzidos com o instrumento, com o objetivo de atestar sua qualidade psicométrica. (AU)

El Big Five Inventory-2 (BFI-2) evalúa la personalidad según el modelo de los Cinco Grandes Factores (CGF). El presente estudio tuvo como objetivo verificar si la estructura interna del BFI-2 se corrobora en una muestra brasileña. Participaron 908 adultos cisgénero, de entre 17 y 93 años, de los cuales 532 eran mujeres. Se realizó un Análisis Factorial Confirmatorio y un Modelo de Ecuaciones Estructurales Exploratorio sobre el BFI-2. Las 15 facetas de personalidad del BFI-2 dieron lugar a índices de ajuste adecuados, especialmente para los encuestados de hasta 60 años. Se concluye que el BFI-2 presenta evidencias iniciales de validez basadas en su estructura interna, aunque se deben ejecutar más estudios de validez con el instrumento para atestiguar su calidad psicométrica. (AU)

Análise de estrutura interna do IBALEC / Analysis of the internal structure of IBALEC / Análisis de la estructura interna de IBALEC

O Instrumento para Breve Avaliação da Leitura, Escrita e Compreensão (IBALEC) se propõe a avaliar o desempenho de alunos de escola pública no domínio das habilidades básicas de alfabetização. Após a validação de conteúdo, por meio da análise de um grupo de especialistas, o IBALEC foi aplicado individualmente em 825 alunos (439 do sexo masculino e 386 do sexo feminino) do 1º ao 5º ano do ensino fundamental em duas escolas públicas, a fim de realizar a análise de sua estrutura interna. As análises fatoriais efetuadas demonstraram bom ajustamento do instrumento a um modelo de estrutura interna composto por cinco fatores correlacionados, correspondentes aos construtos teóricos que subsidiaram a sua construção: leitura de palavras, escrita de palavras, escrita de frases, leitura/compreensão de frases e, leitura/compreensão de texto. Esses resultados constituem forte evidência da validade de construto do IBALEC, para avaliar as habilidades a que se propõe. (AU)

The Instrument for Brief Assessment of Reading, Writing, and Comprehension (IBALEC) aims to assess the performance of public school students in the mastery of basic literacy skills. After content validation, based on the analysis of a group of specialists, the IBALEC was applied individually to 825 students (439 boys and 386 girls) from the 1st to the 5th year of Elementary Education in two public schools, to analyze its internal structure. The factorial analyses performed demonstrated a good fit of the instrument to an internal structure model composed of five correlated factors, corresponding to the theoretical constructs that subsidized its construction: word reading, word writing, sentence writing, sentence reading comprehension, and reading/understanding text. These results are strong evidence of the construct validity of IBALEC, to assess the proposed skills. (AU)

El Instrumento de Evaluación Breve de Lectura, Escritura y Comprensión (IBALEC) tiene como objetivo evaluar el desempeño de los estudiantes de escuelas públicas en las competencias básicas de alfabetización. Después de la validación del contenido, mediante el análisis de un grupo de especialistas, el IBALEC se aplicó de forma individual a 825 alumnos (439 niños y 386 niñas) de 1º a 5º año de primaria de dos centros públicos, con el fin de realizar el análisis de su estructura interna. Los análisis factoriales ejecutados demostraron un buen ajuste del instrumento a un modelo de estructura interna compuesto por cinco factores correlacionados, correspondientes a los constructos teóricos que subsidiaban su construcción: lectura de palabras, escrita de palabras, escrita de oraciones, lectura/comprensión de oraciones, y lectura/comprensión de texto. Estos resultados constituyen una fuerte evidencia de la validez de constructo del IBALEC para evaluar las habilidades propuestas. (AU)

Validade do autorrelato de hipertensão arterial em trabalhadores / Validity of workers self-reports of hypertension

Resumo Introdução O monitoramento da hipertensão arterial sistêmica (HAS) é realizado no Brasil, fundamentado no autorrelato, por meio do sistema VIGITEL. Tendo em vista lacunas acerca desse agravo em populações de trabalhadores, estas devem ser alvo da ação ampliada para o seu diagnóstico epidemiológico. Objetivo Testar a validade de critério do autorrelato de HAS, comparando-o com medidas aferidas de pressão arterial (PA). Método Realizou-se estudo de corte transversal com amostra aleatória do universo de 1.561 trabalhadores de um serviço judiciário na Bahia. Calcularam-se sensibilidade, especificidade, valores preditivos e razões de probabilidade para o autorrelato de HAS, comparando-os com a aferição direta da PA, medida de referência. O diagnóstico de HAS foi a média de duas aferições com PA sistólica ≥ 140 mmHg, e/ou PA diastólica ≥ 90 mmHg, e/ou uso regular de anti-hipertensivos. Resultados Em amostra de 391 trabalhadores, verificou-se sensibilidade de 66,4% (57,1-74,6%), especificidade de 87,9% (83,2-91,4%), valor preditivo positivo de 70,5% (61,1-78,6%), valor preditivo negativo de 85,7% (80,9-89,4%), razões de probabilidade positiva e negativa de 5,5 (3,88-7,72) e de 0,4 (0,30-0,49), respectivamente. Conclusão Este estudo evidenciou o autorrelato como medida válida para o diagnóstico epidemiológico da HAS entre trabalhadores, recomendando seu uso. No entanto, esta validade depende do diagnóstico prévio do agravo.

Abstract Background Monitoring of hypertension, based on self-report, has been performed in Brazil through VIGITEL. In view of the gaps about this problem in worker populations, these should be the targets of the expanded action of epidemiological diagnosis of hypertension. Objective To test the validity of hypertension self-report in comparison to blood pressure (BP) measurements. Method A cross-sectional study was conducted on a random sample of 1561 workers from a Judicial Service in Bahia. Sensitivity, specificity, positive and negative predictive values, and positive and negative likelihood ratios were calculated for the hypertension self-report in comparison with direct BP measurement (reference). Hypertensive cases presented the mean of two BP measurements, with systolic BP ≥ 140 mmHg, and/or diastolic BP ≥ 90 mmHg and/or regular use of antihypertensive drugs. Results In a sample of 391 workers, there was a sensitivity of 66.4% (57.1-74.6%), a specificity of 87.9% (83.2-91.4%), a positive predictive value of 70.5% (61.1- 78.6%), a negative predictive value of 85.7% (80.9-89.4%), a positive and negative likelihood ratio of 5.5 (3.88-7.72) and 0.4 (0.30-0.49) respectively. Conclusion This study showed self-report as a valid measure to implement the epidemiological diagnosis of hypertension among workers, recommending its use. However, its validity depends on the previous diagnosis.

Cognitive Interview in the Search for Validity Evidence Based on Response Processes / Entrevistas Cognitivas na Busca de Evidências de Validade Baseadas no Processo de Resposta / Entrevistas Cognitivas en la Búsqueda de Evidencia de Validez Basada en el Proceso de Respuesta

Abstract Cognitive interviews can provide validity evidence for instruments based on item response processes; however, use of focus groups still prevails in Brazilian literature. Moreover, semantic analysis has only been considered when searching for validity evidence based on test content. This paper presents a proposal for qualitative data analysis based on cognitive interviewing, thus providing researchers with a protocol that enables best practices in carrying out this technique, and consolidating it in the Brazilian literature as an option to search for validity evidence based on item response processes. To conclude, we present some criticisms regarding current procedures for validity evidence based on test content and discuss some possibilities.

Resumo As entrevistas cognitivas podem fornecer evidências de validade para os instrumentos com base no processo de resposta aos itens. Na literatura brasileira, entretanto, o uso de grupos focais ainda prevalece. Além disso, a análise semântica tem sido considerada apenas na busca de evidências de validade baseada no conteúdo do teste. Esse manuscrito apresenta uma proposta para análise de dados qualitativos de entrevistas cognitivas. O objetivo é fornecer aos pesquisadores um protocolo que viabiliza as melhores práticas na realização desta técnica, consolidando-a na literatura brasileira como uma opção para busca de evidência de validade baseada no processo de resposta dos itens. Por fim, são apresentadas algumas críticas em relação aos atuais procedimentos de busca de evidências de validade baseadas no conteúdo e possibilidades são discutidas.

Resumen Las entrevistas cognitivas pueden proporcionar evidencia de validez para los instrumentos basados en el proceso de respuesta al ítem. En la literatura brasileña, sin embargo, aún prevalece el uso de grupos focales; además, el análisis semántico solo se ha considerado en la búsqueda de evidencias de validez basadas en el contenido de la prueba. Este manuscrito presenta una propuesta para el análisis de datos cualitativos de entrevistas cognitivas. El objetivo es proporcionar a los investigadores un protocolo que posibilite las mejores prácticas en la realización de esta técnica, consolidándola en la literatura brasileña como una opción para la búsqueda de evidencias de validez a partir del proceso de respuesta a los ítems. Finalmente, se presentan algunas críticas en relación a los procedimientos actuales de búsqueda de evidencias de validez en base al contenido y se discuten posibilidades.

Cross-Cultural Adaptation and Validation of the Emotional Intelligence Self-Perception Questionnaire / Adaptação e Validação Transcultural do Questionário de Autoperceção de Inteligência Emocional / Adaptación y Validación Transcultural del Cuestionario de Autopercepción de Inteligencia Emocional

Abstract The assessment of emotional intelligence is limited by the lack of psychometrically valid instruments. The present study aimed at cross-culturally adapting and validating the Emotional Intelligence Self-perception Questionnaire (EIQ-SP) in samples of Brazilian and Portuguese university students. Within this scope, in a sample of 1,074 students, reliability, construct-related validity, and criterion-related validity were analyzed. Additionally, metric invariance between the two samples and between genders was assessed. EIQ-SP showed appropriate psychometric qualities in its validation for use in Brazil, maintaining Mayer and Salovey's four-branch model. With a short application time, simple and objective language, its small number of questions makes it an attractive and valuable instrument to investigate Emotional Intelligence.

Resumo A avaliação da inteligência emocional apresenta-se limitada pela falta de instrumentos psicometricamente válidos. O presente estudo teve como objetivo adaptar e validar transculturalmente o Questionário de Autoperceção de Inteligência Emocional (QIE-AP) em amostras de estudantes universitários brasileiros e portugueses. Neste âmbito, em uma amostra de 1074 estudantes, foram analisadas a fiabilidade, a validade relacionada com o constructo e a validade relacionada com o critério. Adicionalmente, foi avaliada a invariância métrica entre as duas amostras e entre gêneros. O QIE-AP demonstrou qualidades psicométricas adequadas em sua validação para uso no Brasil, mantendo o modelo tetrafatorial de Mayer e Salovey. Com tempo de aplicação curto, linguagem simples e objetiva, seu número reduzido de questões o torna um instrumento atrativo e valioso na investigação da Inteligência Emocional.

Resumen La evaluación de la inteligencia emocional se ve limitada por la falta de instrumentos psicométricamente válidos. El presente estudio tiene el objetivo de adaptar culturalmente y validar el Cuestionario de Autopercepción de Inteligencia Emocional (CIE-AP) en muestras de estudiantes universitarios brasileños y portugueses. En este ámbito, en una muestra con 1074 estudiantes, se analizaron la fiabilidad, la validez relacionada con el constructo y la validez relacionada con el criterio. Adicionalmente, se evaluó la invariancia métrica entre las dos muestras y entre géneros. El Cuestionario de Inteligencia Emocional - Autopercepción (CIE-AP) demostró calidad psicométrica adecuada en su validación para uso en Brasil, manteniendo el modelo tetrafatorial de Mayer y Salovey. Con tiempo de aplicación corto, lenguaje simple y objetivo, su número reducido de cuestiones lo convierte en un instrumento atractivo y valioso en la investigación de la Inteligencia Emocional.

Coparenting Questionnaire (CQ): Adaptation and Validity Evidences for Brazilian Context / Co-parenting Questionnaire (CQ): Adaptação e Evidências de Validade para o Brasil / Cuestionario de Coparentalidad (CQ): Adaptación y Evidencia de Validez para Brasil

Abstract Co-parenting is the reciprocal effort between two caregivers to raise a child and is important in the mental health of families. This study aims to describe the adaptation procedures and initial evidence of validity of the Co-parenting Questionnaire (CQ) for Brazil. The adaptation was carried out according to the stages: translation; synthesis of translated versions; evaluation by experts and target audience; and reverse translation. To assess its factorial structure, confirmatory factor analyzes were performed in multifactorial and bi-factorial models in a sample of 590 mothers/fathers aged 21 to 60 years (M = 36.24; SD = 5.88) residing in 21 states of Brazil. The CQ presented adequate adjustments for a correlated multifactorial solution and for the bifactor model. Complementary indices indicate that its multifactorial structure is the most adequate. Considering that 90% of the participants are women, the results show the CQ is a valid instrument for measuring co-parenting in Brazilian women.

Resumo A coparentalidade é o esforço conjunto entre dois cuidadores para criar uma criança e é importante na saúde mental das famílias. Este estudo teve como objetivo descrever os procedimentos de adaptação e evidências de validade do Coparenting Questionnaire (CQ) para o Brasil. A adaptação foi realizada segundo as etapas: tradução; síntese das versões traduzidas; avaliação por juízes experts e público-alvo; tradução reversa. Para avaliar sua estrutura fatorial, análises fatoriais confirmatórias foram realizadas em modelos multifatoriais e bifatoriais em uma amostra de 590 mães/pais de 21 a 60 anos (M = 36,24; DP = 5,88), residentes em 21 estados do Brasil. O CQ apresentou ajustes adequados para a uma solução multifatorial correlacionada e para o modelo bifactor. Índices complementares indicam que sua estrutura multifatorial é a mais adequada. Considerando que 90% dos participantes são mulheres os resultados mostram o CQ como um instrumento válido para a mensuração da coparentalidade nas mulheres brasileiras.

Resumen La coparentalidad es el esfuerzo conjunto entre dos cuidadores para criar a un niño y es importante la salud mental de las familias. Este artículo busca describir los procedimientos de adaptación y evidencias de validez del Cuestionario de Coparentalidad (CQ) para Brasil. La adaptación se realizó según las etapas: traducción; síntesis de versiones traducidas; evaluación por expertos y público objetivo; y traducción inversa. Para evaluar su estructura factorial, se realizaron análisis factoriales confirmatorios en modelos multifactoriales y bifactoriales en una muestra de 590 madres/padres de 21 a 60 años (M = 36,24; DE = 5,88) residentes en 21 estados brasileros. El CQ presentó ajustes adecuados para una solución multifactorial correlacionada y para el modelo bifactorial. Índices complementarios indican que su estructura multifactorial es la más adecuada. Considerando que el 90% de los participantes son mujeres, los resultados muestran el CQ como válido para medir la coparentalidad en mujeres brasileñas.

Evaluation of a beach volleyball skill instrument for the line shot attack / Avaliação de um instrumento de habilidade de voleibol de praia para o ataque de tiro à linha

ABSTRACT This study aimed to develop a test for measuring athletes' performance. Logical, content, construct, criterion validity, as well as reliability, were examined. Three beach volleyball experts evaluated how well the test evaluates the shot skill accuracy according to their judgment (logical validity). A group of eight beach volleyball experts analyzed the test and rated it on a scale of 1 to 7 regarding the relevance of the content as a measure of beach volleyball athlete's accuracy, the average score was calculated at 6.75 (SD=0.46) (content validity). 60 beach volleyball players divided into three equal groups of novices, intermediates, and experts were asked to undergo the test on two separate days. A one-way ANOVA between the three groups was performed, which indicated that the mean scores of the three groups differed significantly (p<0.001 for both days): experts achieved better scores than intermediates who in turn scored better than novices (construct validity). The athletes' scores were correlated with their proficiency level, using the Pearson Correlation test, which indicated very high positive (Day-1: r=0.956, n=60, p<0.001; Day-2: r=0.953, n=60, p<0.001) (criterion validity). The intraclass correlation coefficient was calculated between Day-1 and Day-2 and was found equal to 0.980 for average measures (p<0.001) and 0.961 for single measures (p<0.001). In conclusion, the requirements for logical, content, construct, criterion validity, and reliability have been met. Therefore, the line shot attack test can be used as a valid and reliable measurement instrument for evaluating the performance of beach volleyball athletes.

RESUMO Este estudo teve como objetivo desenvolver um teste para mensurar o desempenho de atletas. No teste foram examinados os seguintes itens: lógica, conteúdo, construto, validade de critério, bem como confiabilidade. Três especialistas em voleibol de praia avaliaram o quão bem o teste avalia a precisão da habilidade de arremesso de acordo com seu julgamento (validade lógica). Um grupo de oito especialistas em vôlei de praia analisou o teste e o classificou em uma escala de 1 a 7 quanto à relevância do conteúdo como medida de precisão do atleta de vôlei de praia, a pontuação média foi calculada em 6,75 (DP=0,46) (validade de conteúdo). A amostra foi constituída por 60 jogadores de vôlei de praia divididos em três grupos: novatos, intermediários e experientes foram convidados a realizar o teste em dois dias separados. Uma ANOVA de uma via entre os três grupos foi realizada, o que indicou que as pontuações médias dos três grupos diferiram significativamente (p<0,001 para ambos os dias): os especialistas obtiveram melhores pontuações do que os intermediários que, por sua vez, pontuaram melhor do que os novatos (validade de construção). As pontuações dos atletas foram correlacionadas com seu nível de proficiência, usando o teste de correlação de Pearson, indicando correlação muito alta e positiva (Dia-1: r=0,956, n=60, p<0,001; Dia-2: r=0,953, n=60, p<0,001) (validade de critério). O coeficiente de correlação intraclasse foi calculado entre o Dia-1 e o Dia-2 e foi igual a 0,980 para medidas médias (p<0,001) e 0,961 para medidas isoladas (p<0,001). Em conclusão, os requisitos de lógica, conteúdo, construto, validade de critério e confiabilidade foram atendidos. Portanto, o teste de ataque de tiro de linha pode ser usado como um instrumento de medida válido e confiável para avaliar o desempenho de atletas de vôlei de praia.

Temporal Stability of the Zulliger Test in Brazilian Adults / Estabilidade Temporal do Teste de Zulliger em Adultos Brasileiros / Estabilidad Temporal del Test de Zulliger en Adultos Brasileños

Abstract The reliability of a test obtained over time is an indispensable measure to ensure the use of the instrument. This study aims to explore the temporal stability of the Zulliger test in Brazilian adults. A total of 20 participants, aged 18 to 59 years, answered a sociodemographic questionnaire and the Zulliger in Comprehensive System (ZCS). Data collection took place from 2009 to 2019 (Test) and in 2021 (Retest). ANOVA did not show differences between the values of 90 (99%) ZCS variables analyzed between test and retest; 68% of the variables showed agreement between 0.40 and 1.00, and 18%. Reflex responses; human movement, animal movement; weighted sum of color responses; sum of animal+inanimate movements; mixed determinants; art and clouds contents; Responses to card I; felt stimulation; cooperative movement; sum of critical special codes; degree of control and stress tolerance denoted high and excellent stability levels intraclass correlation coeficiente (ICC≥0,70). The ZCS demonstrates temporal stability, reliability, and psychometric properties that support its safe use.

Resumo A fidedignidade de um teste obtida ao longo do tempo é uma medida indispensável para assegurar o uso dos instrumentos. Este estudo teve por objetivo explorar a estabilidade temporal do teste de Zulliger em adultos brasileiros. Vinte participantes, entre 18 e 59 anos de idade, responderam formulário de dados sociodemográficos e o Zulliger no Sistema Compreensivo (ZSC). A coleta de dados ocorreu de 2009 a 2019 (teste) e em 2021 (reteste). A ANOVA não mostrou diferenças entre os valores de 90 (99%) variáveis do ZSC analisadas entre o teste e reteste; 68% das variáveis apresentaram concordância entre 0,40 e 1,00 e 18%. Respostas reflexo; movimento humano, movimento animal; soma de cor ponderada; soma de movimentos animal+inanimado; determinantes mistos; conteúdos Arte e nuvem; Respostas para cartão I, estimulação sentida; movimento cooperativo; soma códigos especiais críticos; grau de controle e tolerância ao estresse denotaram níveis de estabilidade alto e excelente Coeficiente de Correlação Intraclasse (ICC≥0,70). O ZSC demonstra estabilidade temporal, confiabilidade e propriedades psicométricas que respaldam o seu uso com segurança.

Resumen La confiabilidad de una prueba realizada a lo largo del tempo es una medida necesaria para asegurar el uso del instrumento. El objetivo de este estudio fue explorar la estabilidad temporal de la prueba de Zulliger en adultos brasileños. Veinte participantes, con edades entre 18 y 59 años, respondieron un formulario de datos sociodemográficos y el Zulliger en el Sistema Comprensivo (ZSC). La recolección de datos tuvo lugar de 2009 a 2019 (test) y en 2021 (retest). ANOVA no mostró diferencias entre los valores de 90 (99%) variables ZSC analizadas entre test y retest; El 68% de las variables mostró acuerdo entre 0,40 y 1,00, y 18%. Respuestas reflejo; respuestas de movimiento humano y animal, suma ponderada de color, suma de movimiento animal+inanimado; determinantes mixtos; Arte y contenido en la nube; Respuestas a la Tarjeta I; estimulación sentida; movimiento cooperativo; suma códigos especiales críticos; grado de control y tolerancia al estrés denotaron niveles de estabilidad altos y excelentes Coeficiente de correlación intraclase (ICC≥0,70). El ZSC demuestra estabilidad temporal, confiabilidad y propiedades psicométricas que respaldan su uso seguro.